In de 17de eeuw werd het kasteel  Peereboomveld voor het eerst vermeld als jachtpaviljoen. In 1835 was sprake van een omringend landgoed met bos en heide en speelhuis met lusttuin dat in 1852, 1873 en 1889 werd uitgebreid door diverse particuliere eigenaren.
Eind 19de eeuw kwam het goed in handen van Stanislas-Emmanuel van Outryve d'Ydewalle die het kasteel liet verbouwen en verfraaien.
Het kasteel Peereboomveld, gebouwd op een L-vormige plattegrond in neoclassicistische   stijl, telt twee verdiepingen plus een zolderverdieping onder manserdedak . Het kasteel, met imposante dreven, omringd door een park dat werd aangelegd in Engelse landschapstijl  wordt nog steeds bewoond door de familie Outryve d’Ydewalle.